在联合学习(FL)中,一组参与者共享与将更新结合到全局模型中的聚合服务器在本地数据上计算的更新。但是,将准确性与隐私和安全性进行调和是FL的挑战。一方面,诚实参与者发送的良好更新可能会揭示其私人本地信息,而恶意参与者发送的中毒更新可能会损害模型的可用性和/或完整性。另一方面,通过更新失真赔偿准确性增强隐私,而通过更新聚合损坏安全性,因为它不允许服务器过滤掉单个中毒更新。为了解决准确性私人关系冲突,我们提出{\ em碎片的联合学习}(FFL),其中参与者在将其发送到服务器之前,随机交换并混合其更新的片段。为了获得隐私,我们设计了一个轻巧的协议,该协议允许参与者私下交换和混合其更新的加密片段,以便服务器既不能获得单个更新,也不能将其链接到其发起人。为了实现安全性,我们设计了针对FFL量身定制的基于声誉的防御,该防御根据他们交换的片段质量以及他们发送的混合更新来建立对参与者及其混合更新的信任。由于交换的片段的参数可以保持其原始坐标和攻击者可以中和,因此服务器可以从接收到的混合更新中正确重建全局模型而不会准确损失。四个真实数据集的实验表明,FFL可以防止半冬季服务器安装隐私攻击,可以有效地抵抗中毒攻击,并可以保持全局模型的准确性。
translated by 谷歌翻译
联合学习(FL)通过设计为参与同行提供了自主性和隐私,他们合作地建立了机器学习(ML)模型,同时将其私人数据保存在设备中。但是,同样的自主权通过进行不靶向或有针对性的中毒攻击来使恶意同伴毒害该模型的大门打开了大门。标签弹性(LF)攻击是一种有针对性的中毒攻击,攻击者通过将一些示例的标签从一个类(即源类)转换为另一个类别(即目标类别)来毒害他们的训练数据。不幸的是,这种攻击易于执行,难以检测,并且对全球模型的性能产生负面影响。现有针对LF的防御措施受到对同龄人数据分布和/或使用高维模型的表现不佳的假设的限制。在本文中,我们深入研究了LF攻击行为,并发现攻击者和诚实的同伴在源类示例上的矛盾目标反映在与输出层中源和目标类的相对应的参数梯度中梯度良好的攻击检测特征。因此,我们提出了一种新颖的防御,首先将这些梯度从同龄人的本地更新中动态提取,然后将提取的梯度簇,分析产生的簇,并在模型聚合之前过滤潜在的不良更新。对三个数据集的广泛经验分析显示,无论数据分布或模型维度如何,建议的防御力对LF攻击的有效性。此外,拟议的防御能力通过提供较低的测试错误,更高的总体准确性,更高的源类准确性,较低的攻击成功率和较高的源类准确性稳定性来优于几个最先进的防御能力。
translated by 谷歌翻译
联合学习(FL)使从分发在一组参与工人之间的本地数据中学习全球机器学习模型。这使得i)由于从丰富的联合培训数据中学习而培训更准确的模型,ii)通过不与他人共享工人的本地私人数据来改善隐私。但是,FL的分布性质使其容易受到针对性的中毒攻击的影响,这些攻击会对学习模型的完整性产生负面影响,而不幸的是,很难检测到。现有针对这些攻击的防御措施受到工人数据分布的假设的限制,可能会在主要任务上降低全球模型性能和/或不适合高维模型。在本文中,我们分析了针对FL的靶向攻击,并发现与攻击相关的深度学习模型的最后一层神经元与无关神经元的行为不同,这使得最后一层梯度有价值特征用于攻击检测。因此,我们将\ textit {fl-defender}作为对抗fl目标攻击的方法。它包括i)通过计算工人的最后一层梯度的工人角度相似性来工程更强的判别特征,ii)使用PCA压缩所得的相似性向量,以减少冗余信息,iiii)重新加权工人的''根据它们与压缩相似性向量的质心的偏差。对具有不同DL模型大小和数据分布的三个数据集进行的实验显示了我们方法在防御标签和后门攻击方面的有效性。与几个最先进的防御能力相比,FL Defender取得了最低的攻击成功率,维持全局模型在主要任务上的性能,并导致服务器上的最小计算开销。
translated by 谷歌翻译
在本文中,我们建议采用MDE范式来开发机器学习(ML)的软件系统,重点关注物联网(IoT)域。我们说明了如何将两种最先进的开源建模工具,即蒙蒂安娜和ML-Quadrat用于此目的,如案例研究所证明的那样。案例研究说明了使用ML使用MNIST参考数据集对手写数字的自动图像识别的ML,特别是深人造神经网络(ANN),并将机器学习组件集成到物联网系统中。随后,我们对两个框架进行了功能比较,设置了一个分析基础,以包括广泛的设计考虑因素,例如问题域,ML集成到较大系统中的方法以及支持的ML方法以及主题最近对ML社区的强烈兴趣,例如Automl和MLOP。因此,本文的重点是阐明ML域中MDE方法的潜力。这支持ML工程师开发(ML/软件)模型而不是实施代码,并通过启用ML功能作为IoT或IoT的组件的现成集成来实现设计的可重复性和模块化。网络物理系统。
translated by 谷歌翻译
我们介绍了Encoder-Forecaster卷积的长短短期记忆(LSTM)深度学习模型,为微软天气的运营降水Newcasting产品提供动力。该模型作为输入一系列天气雷达马赛克,并确定在最多6小时内的铅倍时确定未来雷达反射率。通过沿着特征维度堆叠大型输入接收领域,并通过从基于物理的高分辨率快速刷新(HRRR)模型的预测,通过预测来调节模型的预测,我们能够在多个度量标准上以20-25%的光流和HRRR基线优于光流量和HRRR基线平均在所有交货时间上。
translated by 谷歌翻译
越来越密集的流量在我们当地的环境中成为挑战,促使需要更好的交通监控和管理系统。与车辆粗加分类相比,细粒度的车辆分类似乎是一个具有挑战性的任务。因此,基本上需要探索车辆检测和分类的鲁棒方法,因此需要进行细粒度。现有的车辆制作和模型识别(VMMR)系统已经开发在同步和受控的流量条件上。需要在复杂,城市,异构和非同步交通条件下坚固的VMMR仍然是开放式研究区域。在本文中,使用深度学习解决了车辆检测和细粒度分类。为了进行相关复杂性进行细粒度分类,专门制备具有高内部和低次间变异的本地数据集THS-10。 DataSet由4250辆汽车型号的10辆车型号,即本田市,本田思域,铃木,铃木博拉,铃木文化,铃木Mehran,Suzuki Ravi,Suzuki Swift,Suzuki Wagon R和Toyota Corolla。此数据集可在线获取。已经探索了两种方法,并分析了从深神经网络的微调和特征提取的车辆分类。进行比较研究,并证明了更简单的方法可以在当地环境中产生良好的结果,以应对复杂的问题,如密集的遮挡和车道偏离。因此,减少了计算负荷和时间,例如,微调成立-V3产生的最高精度为97.4%,最低错误分类率为2.08%。微调MobileNet-V2和Reset-18分别产生96.8%和95.7%的精度。从FC6亚历尼特层的提取特征产生93.5%的精度,错误分类率为6.5%。
translated by 谷歌翻译
在过去的十年中,人工智能(AI)为软件系统提供了巨大的新可能性和机会,还提供了新的要求和要求。特别是,机器学习(ML)已被证明在几乎每个垂直应用域中都有用。在未来的十年中,可以预期从经典计算到量子计算(QC)的前所未有的范式转移,也许是带有量子古典混合模型的。我们认为,当涉及量子和量子古典混合应用时,模型驱动的工程(MDE)范式可以是推动者和协助者。这不仅包括自动代码生成,还包括自动模型检查和验证,以及早期设计阶段中的模型分析以及在设计时间和运行时的模型对模型转换。在本文中,愿景集中在量子AI的MDE上,尤其是物联网(IoT)和智能网络物理系统(CPS)应用程序的量子ML。
translated by 谷歌翻译
在本文中,我们展示了ML-Quadrat,这是一种基于Eclipse建模框架(EMF)和智能网络物理学(MDSE)文献中的Eclipse建模框架(EMF)和最先进的开源研究原型,用于智能网络物理系统(CPS)和物联网(物联网)。其设想的用户主要是软件开发人员,他们可能在异构物联网平台和不同的人工智能(AI)技术中,专门对机器学习(ML)具有深入的知识和技能。 ML-Quadrat在GitHub上的Apache 2.0许可证的条款下发布。此外,我们展示了Driotdata的早期工具原型,该基于Web的低码平台,目标是公民数据科学家和公民/最终用户软件开发人员。 Driotdata通过向公司提供延长版本的公司,主要是小型和中型企业(中小企业),Driotdata利用该行业中的ML-Quadrat在行业中进行了延长版本。 Driotdata的当前初步版本有三个基于Web的模型编辑器:基于文本的,基于树/形式和基于图表。后者专为问题的域专家设计或使用案例域(即IOT垂直域名),其可能在其领域中没有知识和技能。最后,在YouTube上提供演示工具的短视频:https://youtu.be/vauz25w0a5k
translated by 谷歌翻译
模型用于软件工程(SE)和人工智能(AI)。 SE模型可以在不同抽象层次的架构中指定架构,并从早期概念化和设计,从软件开发生命周期的各个阶段解决不同的问题,以验证,实施,测试和演化。然而,AI模型可以提供智能能力,例如预测和决策支持。例如,在机器学习(ml)中,这是目前是AI的最受欢迎的子学科,数学模型可能会在观察到的数据中学习有用的模式,并且可以成为能够进行预测。这项工作的目标是通过将在所述社区的模型聚集在一起并提出一种需要ML的智能系统的模型驱动软件开发的整体方法来创建协同作用。我们说明了软件模型如何能够以无缝方式创建和处理ML模型。主要焦点位于事物互联网(物联网)的领域,其中ML和模型驱动的SE都发挥着关键作用。在需要采取有针对性架构的网络物理系统的系统视角下,SE和ML子系统的集成设计环境将最能支持所得系统实现的优化和整体效率。特别是,我们实现了基于INTOMML的CL-Quadrat的所提出的方法,并使用来自物联网域的案例研究以及经验用户评估来验证它。它归还所提出的方法不仅是可行的,而且还可能有助于与IOT连接的智能网络物理系统(CPS)的软件开发的性能飞跃,以及增强的使用者的用户体验建议的建模解决方案。
translated by 谷歌翻译